import urllib.request  #在python3 中 urllib2和urllib合并了
#　3.x以上版本　urllib2.open  不能使用，用urllib.request 模块 代替urllib2
def dowload1(url):
    return urllib.request.urlopen(url).read()  #读取全部网页

def dowload2(url):
    return urllib.request.urlopen(url).readlines() #读取每一行的网页数据然后压入列表

def dowload3(url):
    response=urllib.request.urlopen(url) #网页抽象为文件
    while True:
        line=response.readlines()   #读取一行
        if not line:
            break
        print(line)

url='http://mobile.yangkeduo.com/recommended.html?refer_page_name=index&refer_page_id=10002_1573812014252_o5RkeyMq0e&refer_page_sn=10002'   #开启fiddle 之后http抓取不到  可能是代理的原因

print(dowload3(url))